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PRIMEIRA APOSTILA AO TERMO DE EXECUÇÃO DESCENTRALIZADA - TED/UNB-001/2021 - (PROJETO SABIÁ - PROCESSAMENTO DE 
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600309/2021-00 E SEI/UNB 7424869) 


Por esta apostila, registra-se as alterações do Plano de Trabalho do Termo de Execução Descentralizada em epigrafe , celebrado entre o Tribunal 
Superior do Trabalho - TST , como Unidade Descentralizadora, e a UNIVERSIDADE DE BRASILIA UnB, como Unidade Descentralizada, com fundamento no § 2º, 
art. 15, do Decreto Lei nº 10.426, de 16 de julho de 2020, passando o Plano de Trabalho anexo ao TED a vigorar conforme segue: 
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1. Tipo de Projeto 


(X) Pesquisa ( )Cursode Pós-Graduação ( ) Atividade de Extensão ( ) Ensino de Graduação 


2. Tipo de Instrumento Processual 


( ) Contrato ( ) Convênio (X) Termo de Execução Descentralizada ( ) Acordo de Cooperação ( ) N/A 


3. Dados Cadastrais do Proponente 


Órgão/Entidade C.N.PJ 
UNIVERSIDADE DE BRASÍLIA 00.038.174/0001-43 


Cidade CEP Telefone UG / Cód. Gestão 
BRASÍLIA 70910-900 (61) 3107-0246 154040 / 15257 


Banco Agência Praça de Pagamento 
Banco do Brasil - 001 1607-1 Brasília 
CPF 
334.590.531-00 
CI / Órgão Exp. Matrícula UnB 
960490 SSP/DF 


664.762.751-00 

Matricula UnB 

10628 16 
Endereço Eletrônico (e-mail) Telefone fixo Telefone celular 
niltoncsOunb.br / nilton.correia.silva@gmail.com | (61) 3107-8901 (62) 99249-1953 


Assinatura 


Nome do Gestor do Projeto CPF 

Fabricio Ataides Braz 
Unidade/Departamento Matricula UnB 
Faculdade de Engenharias/FGA 
Endereço Eletrônico (e-mail) Telefone fixo Telefone celular 
fabraz@unb.br / fabricio.brazd gmail.com (061) 98405-5045 


Assinatura 
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Nome do Gestor Substituto do Projeto CPF 

Debora Bonat 
Unidade/Departamento Matrícula UnB 

Faculdade de Direito 


Endereço Eletrônico (e-mail) Telefone fixo Telefone celular 
deborabonat O unb.br (61) 3107-0714 (61) 98405-5045 


Assinatura 


4. Dados Cadastrais do Concedente 


Tipo 2- Nome / Razão Social: 3 - CNPJ 

(X) Público ( ) Privado Tribunal Superior do Trabalho - TST 
Endereço sede (Av., Rua, Nº, Bairro) 

Cidade UF CEP (DDD) Telefone (DDD) Fax 

Nome do representante legal CPF 

| 


CI / Órgão Exp. / Emissão Cargo 


652.155órgão expedidor: SSP-DF Ministro Presidente do Tribunal Superior do Trabalho 
data de expedição: 1/2/1985 


Endereço Eletrônico (e-mail) Telefone fixo Telefone celular 
(61) 3043.4232 


Nome do Coordenador Projeto CPF 


Alexandre William Majdalani 483.197.161-87 


Unidade/Departamento Cargo 
CDS/SETIN Coordenador de Desenvolvimento de Sistemas 


Endereço Eletrônico (e-mail) Telefone fixo Telefone celular 
alexsandre.majdalani@tst.jus.br (61) 3043-4427 (61) 98162-6340 


5. Descrição do Projeto 


TÍTULO DO PROJETO PERIODO DE EXECUÇÃO 


Projeto SABIÁ - Processamento de Linguagem Natural | 25 meses após a assinatura do 
Aplicado ao Sistema Bem-Te-Vi para Análises de Processos | instrumento. 
Jurídicos do Tribunal Superior do Trabalho. 


VALOR TOTAL 


R$ 2.262.981,01 (dois milhões, duzentos e sessenta e dois mil, novecentos e oitenta e um reais e um 
centavo) 
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6. Introdução 


As inovações promovidas pela Inteligência Artificial (IA) têm ocupado espaço 
privilegiado nos meios de comunicação. Conferências de negócios com vistas a aplicar 
a IA para aumentar a competitividade acontecem quase que diariamente pelo mundo. 
Tem sido cada vez mais comum, também, governos mundo afora publicando suas 
políticas para dominar a tecnologia. A IA tem assumido de forma inesperada o centro 
do discurso popular, muito em função dos resultados. 

Os resultados alcançados pela IA tem potencial para mudar nossas vidas. A IA já 
figura como componente base de muitos dos sites e aplicações favoritas da sociedade. 
Só para nomear alguns: Youtube, Facebook, Instagram, TikTok, Google Apps, Netflix, 
Amazon Alexa, Apple Siri, Waze, NuBank. O seu uso foi importante para o 
desenvolvimento de vacinas e diagnóstico da COVID-19 ([Altan e Karasu, 2020], [Yang 
et al, 2021]). 

Sensível à transformação promovida pela IA, o Poder Judiciário brasileiro tem 
envidado muitos esforços para adotar suas técnicas e ferramentas há pelo menos cinco 
anos. Alguns projetos de IA no judiciário ganharam muita repercussão recentemente. 
Dentre eles, destacam-se: 

e VICTOR: projeto executado pelo AILAB, Dra. IA e STF com o objeto de dar 

suporte a seção judiciária do tribunal para classificar temas de repercussão. 
Além disso, o projeto desenvolveu solução para segmentação e classificação de 
peças jurídicas ([Braz et al, 2021], [Silva et al, 2019], [Araujo et al, 2020], 
[Hartmann e Bonat, 2019]). 

e Bem-Te-Vi: O Bem-Te-Vi é um sistema para apoio à gestão e triagem do acervo 
dos Gabinetes de Ministro do TST. Utilizando tecnologias de big data, o 
software disponibiliza aos gabinetes informações sobre os processos de seu 
acervo de forma eficiente e acessível. Com o objetivo de complementar a 
análise do gabinete, são exibidas também informações produzidas por 
algoritmos de Inteligência Artificial que possibilitam, por exemplo, a denegação 
por transcendência, com base nos processos já julgados pelo magistrado. O 
sistema começou a funcionar nos gabinetes do Tribunal Superior do Trabalho 
(TST) em fevereiro de 2020. O maior ganho é na agilidade, que permite uma 
pesquisa rápida para gerenciamento dos processos. Ao possibilitar ao gabinete 
uma triagem de processos mais eficiente e precisa, também viabiliza a definição 
de estratégias para aumento da produção do gabinete. Para a sociedade, o 
sistema contribui para a redução do tempo de tramitação do processo e, 
consequentemente, para a celeridade processual. 

e Athos: projeto executado pelo STJ com o objetivo de melhorar a efetividade de 
buscas processuais por meio de IA. 

e Mandamus: projeto executado pelo AILAB, Dra. IA e TJRR com o objetivo de 
automatizar a geração de mandados a partir da leitura do despacho de 
magistrados; distribuição e monitoramento do cumprimento do mandado. 

e ALEI (Análise LEgal Inteligente): projeto executado pelo AILAB e TRF1 com o 
objetivo de auxiliar o analista judiciário no trabalho de instrução de minutas de 
voto, com referência à jurisprudência e precedentes, além da capacidade de 
sugestão de processos para voto em lote [Silva et al, 2019]. 
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e SINARA: projeto executado pelo TRF3 com o objetivo de localizar entidades 
nomeadas (ER) relacionadas às classes: diploma, artigo, parágrafo, inciso, 
alínea, súmulas e precedentes. 


Ciente da amplitude da mudança e das consequências proporcionadas pela IA, o 
CNJ tem se colocado como um orquestrador dessas iniciativas, fomentando a 
associação entre as entidades ativamente envolvidas nesse processo. Além disso, tem 
envidado ações para conferir uma regulação mínima, por meio de resoluções que 
expressem requisitos e preocupações mínimas a serem atendidas pelos projetos que 
apliquem IA. Por fim, destaca-se o fato de o CNJ estar trabalhando para proporcionar 
um ecossistema denominado Sinapses para que as diversas iniciativas possam ser 
compartilhadas entre os membros do Poder Judiciário [CNJ, 2020]. Dentre as 
iniciativas, destaca-se o CODEX, cujo objetivo é consolidar dados de todos os tribunais 
e disponibilizá-los tanto em texto, como o arquivo fonte para eventuais experimentos 
de IA, reduzindo assim o esforço de acesso ao dado, atividade que representa o 
principal gargalo de qualquer projeto. 

O TST (protagonista com o projeto Bem-Te-Vi) e o AILAB (protagonista nos projetos 
VICTOR, ALE! e Mandamus), atentos aos desdobramentos contínuos da área de IA no 
âmbito judicial e, enxergando oportunidades concretas de pesquisas, juntam-se nesta 
proposta com o intuito de desenvolver novas soluções para evoluir ainda mais o 
sistema Bem-Te-Vi e, com isto, oferecer novas aplicações de IA para o TST e 
potencialmente para o Sistema Judiciário Brasileiro. 

As próximas seções deste Plano de Trabalho detalham como a equipe do AILAB* 
pretende, com o apoio do grupo de pesquisas Dr IA? da Faculdade de Direito da UnB e 
em colaboração com equipe do TST, pesquisar, desenvolver e entregar importantes 
evoluções para o sistema Bem-Te-Vi. 


7. Objeto e Escopo 


O projeto tem como escopo pesquisar e desenvolver soluções para complementar 
o sistema Bem-Te-Vi no que se refere às funcionalidades de Agrupamento de Processos 
e Levantamento de Jurisprudência. Visando evidenciar o desempenho real destas 
soluções, é objetivo deste trabalho desenvolver um módulo de Registro de Feedbacks 
dos usuários. Por fim, este projeto também visa pesquisar soluções de Long Life 
Machine Learning (LLML) com o objetivo de desenvolver uma solução que traga um 
ciclo de vida longo aos modelos de IA implantados. Em síntese, este projeto visa o 
desenvolvimento de 2 (duas) soluções de IA, um sistema de registro de desempenho 
destas IAs e uma solução de LLML, conforme especificado abaixo: 

1. Agrupar Processos: P&D de uma solução capaz de selecionar um 
subconjunto de processos similares a um processo de referência; 

2. Identificar Jurisprudência: P&D de uma solução capaz de selecionar um 
subconjunto de decisões e acórdãos da base de jurisprudência que tenha 
correlação com um processo de referência; 

3. Registrar Feedbacks de Usuários: Desenvolver um sistema de Registros de 
Feedbacks dos usuários quanto ao desempenho das soluções 1, e 2. 


 https://ailab.unb.br/ 
2 http://dria.unb. br/ 
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4. Desenvolver um Subsistema de LLML: Desenvolver um subsistema que 
viabilize a semiautomacão da atualização dos modelos de IA tendo os 
registros de feedbacks de usuários como referência. 


8. Justificativa 

Hoje, no governo federal brasileiro, é muito comum encontrar organizações que 
tentam melhorar seu desempenho, considerando, na maioria dos casos, soluções 
digitais e algumas aplicações tecnológicas. Não é difícil detectar atos normativos 
relacionados à governança digital. Somente para citar alguns (ordem cronológica), 
entre atos da Presidência da República e leis em consonância com o Congresso 
Nacional, foram selecionados: 

(1) Eficiência organizacional, Decreto nº 9.739 / 2019, que visa à administração 
pública federal ampliar e tratar o arranjo institucional do Sistema de Inovação 
do Governo Federal 

(2) Rede Nacional de Governo Digital, Decreto nº 9.584 / 2018, para promover a 
colaboração, o intercâmbio e a criação de iniciativas inovadoras relacionadas ao 
governo digital no setor público; 

(3) Transformação digital, Decreto nº 9.319 / 2018 que institui o Sistema Nacional 
para a Transformação Digital e estabelece a estrutura de governança para a 
implantação da Estratégia Brasileira para a Transformação Digital. 

(4) Responsividade, Decreto nº 9.203 / 2017 que dispõe sobre a política de 
governança da administração pública federal; 

(5) Remoção de formalidades e soluções tecnológicas para simplificar o processo 
cidadão-cliente, Lei Nacional 13.460 / 2017; 

(6) incentivo ao desenvolvimento científico, pesquisa, capacitação e inovação 
científica e tecnológica (“Lei de Inovação”), Lei Nacional 13.243 / 2016; 

(7) Politica de governança digital, Decreto nº 8.638 / 2016, que institui a Política de 
Governança Digital no âmbito da Administração Pública Federal. 

A situação de morosidade e o congestionamento que caracterizam a estrutura 
judicial geram inevitável aumento de seus custos. Os avanços ocorridos em Tecnologia 
da Informação (TI) não têm sido capazes de superar os gargalos existentes e o 
constante congestionamento processual, 

Uma via para ajudar o sistema de justiça, especialmente em relação aos processos 
em tramitação no TST, é a utilização de inovação tecnológica por meio de Aprendizado 
de Máquina (AM) no auxílio da realização de tarefas repetitivas. 

Historicamente, Aprendizado de Máquina, subárea da Inteligência Artificial que 
evoluiu do estudo de reconhecimento de padrões e da teoria da aprendizagem 
computacional em inteligência artificial — tem se apresentado como alternativa 
metodológica para o enfrentamento de problemas de agrupamento (clustering), 
classificação, predição e inferência em grandes volumes de dados. 

Em termos de inovação tecnológica, as entregas, resultado desta pesquisa e 
desenvolvimento, trarão melhorias importantes ao fluxo de análise processual nos 
Gabinetes de Ministros do Tribunal Superior do Trabalho (TST), otimizando o 
trabalho com o agrupamento de processos semelhantes e favorecendo a uniformização 
das decisões do TST. 

Em termos de novos conhecimentos, colaboradores do TST, professores e 
acadêmicos dos cursos de Engenharia de Software e Direito da UnB terão a 
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oportunidade de se atualizarem com métodos e tecnologias inovadores hoje 
desenvolvidos no cenário internacional ao longo do desenvolvimento deste projeto 
interdisciplinar. 

Em termos de produção científica na UnB, esta proposta prevê a participação de 
sua equipe em eventos relevantes da área do projeto, bem como a publicação dos 
resultados da pesquisa em veículos de comunicação cientifica. 


9. Método 


O conhecimento teórico necessário para desenvolvimento da pesquisa será obtido 
por meio de revisão bibliográfica, recorrendo a livros, artigos, websites especializados, 
produções e experiências das equipes do IALAB, DR IA e do TST (TI, Unidades de 
Negócio e Desenvolvedores do Bem-Te-Vi). 

As peças jurídicas de interesse e demais documentos processuais necessários ao 
desenvolvimento do projeto, bem como ao funcionamento dos entregáveis, serão 
fornecidos pelo TST. 

Com o intuito de aproveitamento de experiências da equipe do AILAB e das 
características de integração com processamento paralelo, será adotada a linguagem 
de programação Python (https://www.python.org/) no desenvolvimento do sistema. 
Serão utilizadas bibliotecas especializadas em ML (Numpy, SciPy, Scikit-learn, Pandas, 
Matplotlib, entre outras) e frameworks para DNN (PyTorch, framework FastAl, 
HuggingFace e outros). 

Os módulos de automação desenvolvidos serão disponibilizados no formato de 
microserviços a serem integrados ao Sistema Bem-Te-Vi do TST (Figura 1). 


a SABIÁ EN —— 


/ BEM-TE-VI 
C—— FeedbackSys pe A 
PJe 
== aos | 


Figura 1. SABIÁ: Microserviços. 
A pesquisa & desenvolvimento constará das seguintes metas: 
M1. Compor a Base de Pesquisa e Desenvolvimento: 
Meta inicial que visa fornecer as condições para o desenvolvimento do projeto no 


que se refere à contratação da fundação de apoio, composição de equipes e 
disponibilização de infraestrutura para os trabalhos. 
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M2. Desenvolver o módulo iSimilares: 

Pretende-se atender ao objetivo de agrupamento de processos com o módulo 
iSimilares. Este módulo deve ser capaz de relacionar processos similares a um 
determinado processo de referência, tendo metadados e/ou teores textuais como 
fontes de suas análises. Para tanto, será necessário validar as Hipóteses 1 e 2: 


Hipótese 1: É possível desenvolver um sistema que priorize um subconjunto de 
processos jurídicos do acervo do TST a um determinado processo jurídico de 
interesse conforme um conceito de similaridade para fins de agrupamento de 
processos. 


Premissa: O sistema Bem-Te-Vi fornecerá metadados e textos de peças jurídicas 
suficientes para se alcançar uma métrica de similaridade para fins de agrupamento 
de processos. 


A questão se este módulo deverá atuar de forma geral ou estratificada (por 
gabinete, por exemplo) deverá ser definida junto com pessoal do TST. 


M3. Desenvolver o módulo iJurisprudéncia; 

Pretende-se atender ao objetivo de levantamento de jurisprudência com o 
módulo iJurisprudência . O conceito de jurisprudência aqui está relacionado a 
processos julgados do acervo do TST. Assim, este módulo deve ser capaz de 
correlacionar processos julgados a um determinado processo de referência, tendo 
metadados e/ou teores textuais como fontes de suas análises. Para tanto, será 
necessário validar a Hipótese 3: 


Hipótese 3: É possível desenvolver um sistema que correlacione um subconjunto 
de processos julgados do acervo do TST a um determinado processo jurídico de 
interesse conforme um conceito de correlação para fins de levantamento de 
jurisprudência. 


Premissa: O sistema Bem-Te-Vi fornecerá metadados e textos de peças jurídicas 
suficientes para se alcançar uma métrica de similaridade para fins de levantamento 
de jurisprudência 


A questão se este módulo deverá atuar de forma geral ou estratificada (por 
gabinete, por exemplo) deverá ser definida junto com pessoal do TST. 


M4. Desenvolver o módulo FeedbackSys: 

O módulo FeedbackSys visa atender ao objetivo de registrar feedbacks (avaliações) 
dos usuários sobre os desempenhos dos módulos com modelos de IA embarcados 
(iSimilares, iJurisprudências). Assim, este módulo deve oferecer meios para que o 
sistema Bem-Te-Vi envie registros de avaliações dos usuários. Estes registros deverão 
ser persistidos de forma adequada para o módulo iLongLifeSys. 


M5. Desenvolver módulo iLongLifeSys: 
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O módulo itongtifeSys visa atender ao objetivo de desenvolver um subsistema de 
LLML. Este subsistema deve viabilizar a semiautomação da atualização dos modelos de 
IA tendo os registros de feedbacks de usuários como referência. 


M6. Publicar Resultados das Pesquisas: 

Os resultados alcançados deverão ser submetidos para publicação em eventos e/ou 
revistas científicas, nacionais e/ou internacionais. O coordenador e pesquisadores 
envolvidos deverão liderar as ações desta meta de forma a oportunizar o trabalho 
colaborativo e coautorias com alunos e colaboradores do TST que se interessarem. 
Destaca-se ainda a importância da participação da equipe executora em eventos 
científicos da área, a fim de que o projeto possa ser retroalimentado com técnicas e 
conhecimentos novos relativos ao que outros grupos de pesquisas e empresas estão 
desenvolvendo de inovador na área de IA e PLN. 


M7. Transferir Tecnologia e Conhecimentos para TST: 

As transferências de tecnologias e de conhecimentos tem por objetivo viabilizar 
que o TST se aproprie dos resultados do projeto e consiga dar prosseguimento ao 
mesmo depois de sua entrega. Uma vez que o TST terá uma equipe técnica 
colaborando nas fases de P&D da proposta, espera-se que a apropriação das técnicas e 
das tecnologias desenvolvidas sejam paulatinamente internalizadas ao longo do 
desenvolvimento do projeto. Atividades específicas de transferências para usuários 
finais e outros colaboradores do TST também estão previstas — esta iniciativa visa a 
promoção do uso efetivo do projeto pelo público interno do TST. 

Os artefatos de softwares (códigos-fonte, documentações), artefatos de dados 
(banco de dados, conjunto de dados para modelagem de IA), modelos de IA, bem 
como, documentações técnicas geradas deverão ser repassadas ao TST. 


Esta pesquisa será desenvolvida por equipe interdisciplinar da UnB e com apoio de 
comissão técnico-gestora do TST. A UnB poderá contratar uma de suas fundações de 
apoio para a gestão das atividades administrativas e financeiras. 

Prevemos que as metas M2, M3, M4, M5 e M6 devem direcionar as pesquisas em 
IA para as seguintes temáticas voltadas a Processamento de Linguagem Natural (PLN): 

1. Classificação 
2. Clustering 
3. Long Life Machine Learning (LLML) 

O trabalho [Vaswani et al, 2017] abriu perspectivas em processamento de 
linguagem natural (PNL) que, até então, eram inimagináveis. Os modelos decorrentes 
do método Transformer’ proporcionaram resultados que revolucionaram várias tarefas, 
especialmente no que diz respeito a: tradução computadorizada, conversação, geração 
de conteúdo e classificação ([Devlin et al, 2019], [Radford et al, 2019], [Yang et al, 
2019], [Liu et al, 2019], [Raffel et al, 2020]). 

Alguns fatos são dignos de nota, quando nos referimos a modelos baseados em 
Transformer. Primeiramente, impressiona a elevada demanda de recursos 
computacionais para construir e operá-los. Isso é consequência da quantidade de 
parâmetros contemplados pela arquitetura das redes neurais, combinada ao expressivo 


3 O link https://app.inferkit.com/demo apresenta uma aplicação que faz uso de modelo baseado em 
Transformer, no caso, o GPT-2. 
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volume de dados usado para treiná-los. Ou seja, para se conseguir obter o modelo 
treinado, são necessárias dezenas Graphic Processing Units (GPUs) por vários dias. A 
NVIDIA, por exemplo, conseguiu treinar o BERT-Large em 47 minutos, usando 1.472 
V100 GPUs [Liu et al, 2020]. A Tabela 1 exemplifica alguns desses modelos. 


Tabela 1. Modelos de Linguagem. 


Modelo Parâmetros Volume de Dados 
un. de milhão de 
amostras 
SQUAD 1.1º 
BERTIE ara 100.000 amostras 
GPT-2 1.500 40 GB 
GPT-3 175.000 570GB 


Outro fato relevante é que os modelos mais modernos de PNL citados 
anteriormente são treinados com dados em inglês. O que torna os seus modelos 
pré-treinados aptos a sofrerem adaptações para tarefas em sua língua nativa. Apesar 
de termos promovido ajuste fino em modelo originalmente em inglês para o 
português, observamos que ainda temos um caminho para que este modelo possa ser 
adaptado para uma área do domínio específico, como o direito, além de outras 
limitações associadas ao conjunto limitado de treinamento, para que fosse viável 
realizar o processo com os recursos que o AILAB conta no presente momento. 
Prevemos investigações relativas a Transformers [Vaswani et al, 2017b] e Transferência 
de Aprendizado em NLP [Raffel et al, 2020]. 


Á Técnicas 
| RegEx 
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Figura 2. Técnicas a serem empregadas nas pesquisas. 


Em termos de técnicas, prevemos aplicações de abordagens mais usuais como 
Expressões Regulares — RegEx na identificação de entidades nomeadas (Named Entity 
Recognition — NER) e Métodos Estatísticos (ME) principalmente para análises 
exploratórias dos dados (AED). Haverá investigações de potenciais usos de Métodos de 
Aprendizado de Máquina — AM, Aprendizado Profundo (Deep Learning - DL) e 


4 The Stanford Question Answering Dataset 


Laboratório de Inteligência Artificial - AILAB. Universidade de Brasília — UnB. 


“=” UnB PLANO DE TRABALHO 


Transformers para NER e na fase de modelagens em IA para realização de classificações 
e agrupamentos (Figura 2). 


10. Resultados Esperados para TST 


Espera-se que a consecução das metas e das investigações descritas atendam às 
expectativas do TST enumerada a seguir: 


1. Otimização dos recursos humanos envolvidos na condução das atividades 
administrativas e judiciais do TST: como detalhado, as pesquisas e entrega de 
resultado por meio de microserviços que serão integrados ao sistema 
Bem-Te-Vi afetarão positivamente os colaboradores do TST que realizam 
atividades de análises processuais jurídicas. 

2. Aumento da capacidade de processamento do volume de demandas, o que 
permitirá tramitação mais veloz dos processos no TST: a mesma automação 
citada anteriormente, operando em conjunto com o Bem-Te-Vi e PJe, elevará a 
capacidade de resposta desta corte aos usuários de seu sistema de 
julgamentos. 

3. Diminuição da Taxa de Congestionamento de processos no Judiciário: com a 
elevação da produtividade decorrente da automação de tarefas repetitivas 
associadas a análises documentais e movimentação judicial, espera-se uma 
redução importante do congestionamento de processos trabalhistas. 


11. Resultados Científicos e Tecnológicos Esperados: 


Esperamos contribuir cientificamente com a sociedade interessada na temática de 
IA no judiciário com a divulgação científica dos resultados encontrados ao longo da 
execução do projeto. Para tanto, está prevista a submissão dos resultados a congressos 
e revistas de relevância para a área de IA e PLN. 

O projeto Bem-Te-Vi do TST é um dos projetos pioneiros e de sucesso em aplicação 
de IA para o judiciário brasileiro. Os resultados do projeto SABIÁ contribuirão 
diretamente na incorporação de métodos e técnicas inovadoras e atuais ao sistema 
Bem-Te-Vi. 

É esperado que soluções para agrupamento de processos similares e de 
levantamento de jurisprudência trabalhista sejam entregues contendo as técnicas e 
métodos mais atuais e promissores da área de Inteligência Artificial. 

Os módulos de LLML e de Feedback de usuários se configuram em duas outras 
importantes tecnologias que deverão ser citadas como pioneiras em promoverem 
perenidade a sistemas de IA no judiciário brasileiro — um problema importante da área 
de IA cujas soluções estão sendo buscadas por importantes grupos de pesquisa em IA 
no Brasil e em outros países de expressiva produção tecnológica e científica. 

O projeto em pauta traz uma proposta ousada do ponto de vista de investigações 
de assuntos de fronteira do conhecimento em IA e robusta quanto à sua proposta de 
entregar o resultado destas pesquisas avançadas na forma de soluções por softwares 
de uso direto e imediato para o sistema Bem-Te-Vi e TST. 


12. Resultados Esperados para UnB 
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1. Qualificação de professores e discentes em área avançada de pesquisa em PLN. 

Qualificação de professores e discentes em análise processual. 

3. Qualificação de professores e discentes em processo de desenvolvimento de 
software ágil e DevOps. 

4. Publicação científica dos resultados alcançados. 

Melhoramento de recursos tecnológicos e de pessoal para projetos em IA. 

6. Suporte ao desenvolvimento de trabalhos de conclusão de curso, dissertações 
de mestrado e teses de doutorado. 


in 


on 


13. Cronograma de Execução 


A execução do projeto ficará a cargo das equipes na Universidade de Brasília — UnB 
e de equipe com pessoal a ser designada pelo TST conforme detalhamento da tabela 
abaixo. 


13.1 Alteração no Cronograma de Execução 


O Plano de Trabalho apresentado e aprovado constava do ordenamento de execução 
explícito no item 9 e detalhado no item 13. Entretanto, em reunião realizada no dia 
24/02/22 foi proposto pela equipe do Tribunal Superior Trabalho um reordenamento 
das entregas, provocando a alteração das datas de execução entre as Meta 2, Meta 3 
com impacto na Meta 4. 

Tal solicitação se justifica pelo maior alcance que a implementação do 
Jurisprudência terá dentro do tribunal, provocando uso em cadeia dos módulos que, 
posteriormente, serão disponibilizados. 

Dito isto, segue o cronograma de execução com o remanejamento de datas que 
preveem o desenvolvimento dos módulos iJurisprudéncia, iSimilares e demais 
reajustes. 

Esta proposta resultou em Apostilamento aprovado em 24/03/23. 


13.2 Justificativa de alteração no Cronograma de Execução 


O projeto surgiu com com o objetivo de pesquisar e desenvolver soluções para 
complementar o sistema Bem-Te-Vi no que se refere às funcionalidades de 
Agrupamento de Processos e Levantamento de Jurisprudência. Visando evidenciar o 
desempenho real destas soluções, foi proposto o desenvolvimento de um módulo de 
Registro de Feedbacks dos usuários e a identificação de soluções de Long Life 
Machine Leaming (LLML) que tragam um ciclo de vida longo aos modelos de IA 
implantados. 

Para tanto, os estudos iniciaram-se com o ênfase no iSimilares objetivando a 
identificação de peças que poderiam ser utilizadas, bem como, na identificação de 
técnicas de IA possíveis de serem aplicadas no contexto. Isto feito, uma proposta de 
solução foi apresentada, tomando os estudos mais específicos e aprofundados em 
Long Life Machine Leaming e métodos de feedback. 

O resultado desse estudo foi o desenvolvimento das atividades 5, 6, 7 e 8 do 
Módulo iSimilares que, até então, estava em andamento conforme especificado 
abaixo: 
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e Atividade 5: revisão técnica da arquitetura e modelos de agrupamento 
de processos já implementados pelo TST. 

e Atividade 6: revisão técnica e da literatura (RTL): Métodos e técnicas 
aplicáveis ao agrupamento de processos do TST. 

e Atividade 7: formalizar o conceito de similaridade para fins de 
agrupamento. 

e Atividade 8: definir o subconjunto de peças relevantes para 
agrupamento. 

Até aqui, cumpria-se o cronograma de atividades previsto no Plano de trabalho 
do projeto de Pesquisa e Desenvolvimento. Neste, o módulo iSimilares foi previsto 
para ser a primeira solução a ser pesquisada pela equipe da UnB. Entretanto, em 
reunião realizada no dia 24/02/2022 foi proposto pela equipe do Tribunal Superior 
Trabalho um reordenamento das entregas o que ocasionou a inversão dos módulos de 
iSimilares com o iJurisprudência. Tal proposta foi aceita pela equipe da UnB e 
formalizada por meio do 1º Aditivo à TED 01/2021 TST/UNB. 

Em reunião negocial no TST no dia 09/02/2023 com o feedback do TST 
evidenciou-se a necessidade de repensar o alvo definido ao longo das etapas de 
pesquisa executadas até então, que dava atenção à busca de soluções que 
considerassem o processo como um todo. Apesar desse direcionamento estar 
coerente com o plano de trabalho, com os instrumentos de análise de questões 
negociais gerados pela equipe da UnB e apreciados pela corte, houve entendimento 
geral de que seguir nesta direção levaria a resultados pouco úteis para o TST, visto 
que os representantes dos gabinetes expuseram com muita ênfase a sua necessidade 
de avaliação no âmbito dos assuntos discutidos em cada recurso, e não na 
perspectiva global. 

Entendeu-se conjuntamente a necessidade de suspender as atividades 
técnicas de engenharia de IA para priorizar uma imersão nas experiências individuais 
dos gabinetes, sob a perspectiva de reconhecer lacunas no Bem-Te-Vi para alavancar 
a atividade de operação de triagem de recursos de cada gabinete. Os gabinetes 
considerados para a imersão foram: 

e GMCB em 16/02/2023 

e GMDS e GMKA em 02/03/2023; 
e GMDSe GMALR em 06/03/2023; 
e GMCMB em 09/03/2023 

Ao longo de 3 semanas, a equipe de pesquisa do projeto realizou visitas aos 
gabinetes, conforme cronograma descrito acima. Tais visitas induziram análises mais 
amplas envolvendo tanto membros de frentes de negócio, quanto de engenharia de IA 
da UnB. 

Como resultado desta imersão, o TST sugeriu reunir todos os esforços e 
retomar o módulo de iSimilares para construir uma proposta e somente após, voltar e 
repensar o módulo de iJurispudência. A UnB, por sua vez, acatou e entendeu ser uma 
estratégia coerente já que: (1) o iSimilares possui funcionalidades que poderão ser 
aproveitadas em relação ao iJurisprudência e (2) o iJurisprudência precisa de um 
complemento e acréscimo de um mecanismo de controle de similaridade em seu 
resultado final. 
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O processo de construção e reconstrução de caminhos pode acontecer no 
decorrer de qualquer projeto de pesquisa e desenvolvimento, considerando que um 
projeto de pesquisa tem como objetivo a experimentação de métodos, exaurindo 
possibilidades, a fim de confirmar ou não as hipóteses propostas inicialmente. Isto 
posto, justifica-se a alteração das datas das atividades do plano de trabalho para 
refletir as mudanças propostas. 


Novo cronograma com atividades/indicadores físico-financeiro 
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Modelagem: Avaliar a aplicabilidade 
de diferentes modelos não Códigos-fonte e 
supervisionados, implementar e testar relatório técnico 
candidato vencedor. 

Códigos-fonte e 
documentação 


técnica. 


Integrar o Microserviço iSimilares à 
12 = 18 
solução. 
Definir arquitetura geral de = 
Documentação 
13 | microservigos em conformidade com 2 


técnica. 
Sinapses [CNJ, 2020]. 

Integrar o Microserviço iSimilares ao Códigos-fonte e 
documentação 
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Sinapses (envio automático do 
modelo) 

RTL: Métodos e técnicas aplicáveis ao 
levantamento de jurisprudência do 
TST. 
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i TON UnB/TS PR 
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evidenciem os UnB/TS a WE 
5 22 Relatório técnico X|XI|XIXIX|XIX|XIX|XIX|X|X|x|x]x 
desempenhos dos modelos de IA para T 
fins de LLML. 
Avaliar comparativamente melhores 
soluções para cada um dos módulos UnB/TS EEE 
ay a 22 Relatório técnico XIX|IX|X]|XI|X|X|XIXIX|X|X|X|X|X 
de IA utilizados e eleger candidatos T 
vencedores. 


; z Códigos-fonte e 
Desenvolver e testar e integrar solução UnB/TS 2 
à Te a 17 |23 documentação x|x|x|x 
de LLML para o módulo de iSimilares. T paii 
técnica. 
Desenvolver e testar e integrar solução UnB/TS Códigos-fonte e 
de LLML para o módulo de 17 |23 a documentação x|x|x|x 
Jurisprudências. técnica. 
Submeter resultados das pesquisas a UnB/TS| Comprovante de 
37 E Mo 25 e XIXIX|XIXIX|IX|X|X|X|xX|X 
eventos e/ou a revistas científicas. T submissão. 
am ers Comprovantes: 
Participação em eventos científicos da UnB/TS | . ane 
2 [25 T inscrições e/ou xIxixixixixixixixixixixixix|xixix|x]x 
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14. Plano de Aplicação (em Reais (RS)) 


A - Total de Receitas 2.262.981,01 


Especificação Valor Total 
(R$) 


24.315,00 
Passagens e despesas com locomoção 25.127,51 


1.525.000,00 


Outros Serviços de Terceiros - Pessoa Jurídica 462.351,29 
Equipamento e Material Permanente 217.000,00 


B - Total de Despesas 2.262.981,01 


15. Detalhamento das Despesas (em Reais (RS)) 


PR E ie 
Beneficiário dade nit. alor total 


Mm | ras os | coro 
Internacional A Definir 15 1.365,00 20.475,00 


320,00 3.840,00 
24.315,00 


Passagem e despesa com locomoção 


HE Ea 
M Beneficiário Trecho unit. Valor total 
os | ara | | oro MA 
1 Internacional A Definir 3 6.375,84 19.127,51 
Passagem j 


25.127,51 


Bolsa de Pesquisa 


E e al FEN 
M Beneficiário Modalidade Período unit. Valor total 


Nilton Correia 


da Silva - (Área Pesquisador Sênior 


Fabricio Ataides 
Braz - (Área de Pesquisador Sênior 
t 25 9.000,00 225.000,00 
Bonat 
de Pesquisador Sênior 
Direirto L 25 9.000,00 | 225.000,00 
Luciana Nishi A 
ERRAR 
Computação inovação 1 25, 5.000,00 | 125.000,00 
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Aline Dayany de 


x Pesquisa, Desenvolvimento e 
Lemos (Area de ALESE 


novação 


5.000,00 | 125.000,00 
5.000,00 | 125.000,00 
1.500,00 | 150.000,00 


Jonathan r š 
Pesquisa, Desenvolvimento e 
Salgado 


E novação 
de Computação ç 


Pesquisador Pesquisa, Desenvolvimento e 
(Área q 
novação 
Computação) 4 


Bolsa de 

Pesquisa, 

Desenvolviment Pesquisa, Desenvolvimento e 
Inovação novação 


1.000,00 1 225.000,00 
2.000,00 50.000,00 


1.525.000,0 
D 


Pesquisa, 

Desenvolviment 
o e Inovação 
Área de Direito 


Pesquisa, Desenvolvimento e 
Inovação 


Outros Serviços de Terceiros - Pessoa Jurídica 


E ol a 
M Descrição unit. Valor total 


Taxa de inscrição em evento científico internacional 3.000,00 9.000,00 
EH Taxa de inscrição em evento científico nacional 500,00 2.000,00 
| 3 | Despesas Acessórias de Importação 42.000,00 42.000,00 


Despesas Operacionais e Administrativas 175340 
espesas Operacionais e inistrate 1 4 174.557,04 
FA 234.794,2 
x E > ; 
A Ressarcimento FUB (resoiution ORD Oia) 234.794,25 


462.351,29 


Ei Equipamento e Material Permanente 


E E e ere 
M Descrição unit. Valor total 


i 210.000,0 


Dos 217.000,00 
Imposto Sobre Serviços de Qualquer Natureza 


E SET = 
M Descrição unit. Valor total 
Imposto Sobre Serviços (IS5)* 9.187,21 9.187,21 
o Subtetl ëO 9.187,21 


Encargo incorrido sobre a execução do projeto, com alíquota de 5%, conforme LC n.º 116/2003, sobre o valor 
projeto, exceto ressarcimento da Instituição Federal de Ensino Superior (IFE). 


B - Total de Despesas 2.262.981,01 


Valores de bolsas conforme Resolução do Conselho de Administração da Universidade 
de Brasília Nº 0003/2018. 


16. Cronograma de Desembolso 
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Mês 1: R$ 1.424.323,69. Mês 12: R$ 838.657,32 
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